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Uploadfilter bei Kriminalämtern und Internetunternehmen für sogenannte 
extremistische oder radikalisierende Inhalte 


Vorbemerkung der Fragesteller 

Das internationale „Counter Extremism Projeet” (CEP) hat eine Software vor- 
gestellt, mit der extremistische Inhalte beim Upload entdeckt werden sollen 
(Pressemitteilung Counter Extremism Projeet vom 17. Juni 2016). Das Verfah- 
ren basiert auf PhotoDNA, einer Anwendung die von Microsoft ursprünglich 
für die Bekämpfung von Kinderpomografie entwickelt wurde. Möglich ist die 
Detektion von Video- und Audioinhalten. Die Erkennungsquote hegt angeblich 
bei 98 Prozent. PhotoDNA funktioniert nach dem sogenannten Robust Hashing 
und erstellt einen digitalen Fingerabdruck der Datei. Der Abgleich erfolgt mit 
einer Hash-Datenbank, die entweder bei den Unternehmen oder auch Behörden 
geführt wird. Außer Microsoft haben bereits mehrere Intemetdienstleister, da- 
runter Facebook, Google, Youtube und Twitter, PhotoDNA auf ihren Servern 
installiert. Die Firmen scannen dabei auch Inhalte, die von den Nutzerinnen und 
Nutzem in der privaten Cloud gespeichert werden. Werden dort kinderporno- 
grafische Inhalte entdeckt, können die zuständigen Strafverfolgungsbehörden 
eine Meldung erhalten. Die Fälle werden dann auch international verfolgt, min- 
destens einmal hat das Bundeskriminalamt (BKA) einen solchen Hinweis von 
US-Behörden erhalten (golem.de vom 13. Januar 2015). Das BKA hat im Jahr 
2012 selbst die Software PhotoDNA zu „Testzwecken“ beschafft (Bundestags- 
drucksache 17/11299). 

Vergangenen Sommer hatte die Europäische Union eine „Meldestelle für Inter- 
netinhalte“ bei der Polizeiagentur Europol eingerichtet. Strafverfolgungsbehör- 
den und Geheimdienste aus den Mitgliedstaaten der Europäischen Union kön- 
nen dort Inhalte zur Entfernung melden. Europol reicht diese dann an die Inter- 
netuntemehmen weiter. Die privaten Intemetdienstleister haben selbst keinen 
Zugriff auf die Polizeidaten. Deshalb hat die Europäische Kommission im De- 
zember 2015 ein „Fomm der Intemetdienstleister“ gestartet, um die Firmen 
selbst zur Kontrolle des Internets anzuhalten (www.cilip.de vom 19. Novem- 
ber 2015). Das „Forum“ soll „Instmmente“ zur Bekämpfung terroristischer Pro- 
paganda im Internet und in den sozialen Medien entwickeln. Ziel ist die Ein- 
richtung einer öffentlich-privaten Datenbank mit bereits gefundenen bzw. ent- 
fernten Inhalten. Laut einer Mitteilung der Europäischen Kommission 
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(COM(2016) 230 final vom 20. April 2016) arbeiten die Unternehmen „unter 
voller Einbeziehung von Europol“ an der gemeinsamen Meldeplattform. Dabei 
kommt vermutlich ebenfalls die von Microsoft entwickelte Software PhotoDNA 
zur Anwendung. Das Bundesministerium des Innern bestätigt, „die technische 
Identifizierung gleicher bzw. ähnlicher Intemetinhalte“ erfolge anhand von 
Hashwerten (Bundestagsdrucksache 18/8845). Ein solcher Uploadfilter sei aus 
Sicht der Bundesregierung „bei den Unternehmen anzusiedeln“. Fraglich ist je- 
doch, wo die benötigte Datenbank mit Hashwerten von Dateien mit „extremis- 
tischen oder terroristischen Inhalten“ geführt wird. Ebenfalls unklar ist, ob dort 
lediglich solche Intemetinhalte gespeichert werden, die bereits einmal hochge- 
laden wurden, oder ob europäische Kriminalämter (inklusive Europol) dort auch 
unveröffentlichtes Material zur etwaigen Löschung hinterlegen können. 

Im Hinblick auf die sitzungsfreie Zeit des Deutschen Bundestages und die Qua- 
litätssichemng der Antworten erklären sich die Fragesteller mit einer Fristver- 
längerung für die Bearbeitung der Kleinen Anfrage einverstanden. 


Vorbemerkung der Bundesregierung 

Die Bundesregierung beantwortet die im Rahmen des parlamentarischen Frage- 
rechts angeffagten Sachverhalte gegenüber dem Deutschen Bundestag grundsätz- 
lich transparent und vollständig, um dem verfassungsrechtlich verbrieften Auf- 
klärungs- und Informationsanspruch des Deutschen Bundestages zu entsprechen. 
Soweit Anfragen Umstände betreffen, die aus Gründen des Staatswohls geheim- 
haltungsbedürftig sind, hat die Bundesregierung aber zu prüfen, ob und auf wel- 
che Weise die Geheimhaltungsbedürftigkeit mit dem parlamentarischen Informa- 
tionsanspruch in Einklang gebracht werden kann (BVerfGE 124, Seite 161, 189). 
Evident geheimhaltungsbedürftige Informationen muss die Bundesregierung 
nach der Rechtsprechung des Bundesverfassungsgerichts nicht offenlegen 
(BVerfGE 124, 161, 193 f). 

Die Bundesregierung ist nach sorgfältiger Abwägung zu der Auffassung gelangt, 
dass die Fragen 23, 24 und 25d aus Geheimhaltungsgründen teilweise nicht in 
dem für die Öffentlichkeit einsehbaren Teil beantwortet werden können. 

Zwar ist der parlamentarische Informationsanspruch grundsätzlich auf die Beant- 
wortung gestellter Fragen in der Öffentlichkeit angelegt. Die teilweise Einstufung 
der Antwort auf die Fragen 23, 24 und 25d als Verschlusssache (VS) mit dem 
Geheimhaltungsgrad „VS - Nur für den Diensfgebrauch“ isf aber im vorliegenden 
Fall erforderlich. 

Nach § 3 Nummer 4 der Allgemeinen Verwaltungsvorschrift zum maferiellen und 
organisaforischen Schufz von Verschlusssachen (Verschlusssachenanweisung, 
VSA) sind Informationen, deren Kennfnisnahme durch Unbefugfe für die Inferes- 
sen der Bundesrepublik Deufschland oder eines ihrer Länder nachfeilig sein kön- 
nen, enfsprechend einzusfufen. Eine zur Veröffenflichung besfimmfe Anfworf der 
Bundesregierung auf diese Fragen würde spezifische Informationen zur Täfigkeif, 
insbesondere zur Methodik und den konkreten technischen Fähigkeiten der Si- 
cherheitsbehörden einem nicht eingrenzbaren Personenkreis - auch der Bundes- 
republik Deutschland möglicherweise gegnerisch gesinnten Kräften — nicht nur 
im Inland, sondern auch im Ausland zugänglich machen. Dabei würde die Gefahr 
entstehen, dass ihre bestehenden oder in der Entwicklung befindlichen operativen 
Fähigkeifen und Mefhoden aufgeklärt würden. Dies kann für die wirksame Erfül- 
lung der gesefzlichen Aufgaben der Sicherheifsbehörden und damit für die Infe- 
ressen der Bundesrepublik Deufschland nachfeilig sein. Diese Informationen wer- 
den daher gemäß § 3 Nummer 4 VSA als „VS - Nur für den Diensfgebrauch“ 
eingesfuft und dem Deufschen Bundesfag gesondert übermittelt. 
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1 . Welchen Inhalt hat nach Kenntnis der Bundesregierung ein „Verhaltensko- 
dex“, den die Europäische Kommission am 3 1 . Mai 2016 vorgestellt hat und 
der mit den Diensteanbietem Facebook, Twitter, YouTube und Microsoft 
abgestimmt wurde (Bundestagsdrucksache 18/8845)? 

2. Wann und wo soll dieser „Verhaltenskodex“ nach Kenntnis der Bundesre- 
gierung veröffentlicht werden? 

3. Welche weiteren Beteiligten haben den „Verhaltenskodex“ nach Kenntnis 
der Bundesregierung unterzeichnet, bzw. was ist hierzu geplant? 

4. Auf welche Weise wollen die Unternehmen nach Kenntnis der Bundesregie- 
rung „stärker gegen illegale Flassbotschaften auf ihren Plattformen Vorge- 
hen“? 

Die Fragen 1 bis 4 werden aufgrund des Sachzusammenhangs gemeinsam be- 
antwortet. 

Der Kodex ist unter der Internet-Adresse http://ec.europa.eu/justice/fundamental- 
rights/files/hate_ speech_code_of_conduct_en.pdf öffentlich abrufbar. Darüber 
hinaus liegen der Bundesregierung keine weiteren Erkennntnisse vor. 


5. Auf welche Weise haben welche Bundesbehörden in der Vergangenheit mit 
dem „Counter Extremism Projecf ’ kooperiert oder von dort Analysen erhal- 
ten? 

In der Vergangenheit fand keine Zusammenarbeit von Bundesbehörden mit dem 
„Counter Extremism Project“ statt. 


6. Was ist der Bundesregiemng über Pläne des „Counter Extremism Project” 
(CEP) bekannt, die Intemetanbieter zur Einfühmng einer Software zu bewe- 
gen, mit der extremistische Inhalte beim Upload entdeckt werden sollen? 

7. Welche Intemetanbieter haben einen solchen Filter nach Kenntnis der Bun- 
desregiemng bereits eingeführt? 

Die Fragen 6 und 7 werden aufgrund des Sachzusammenhangs gemeinsam be- 
antwortet. 

Der Bundesregierung liegen hierzu keine Erkenntnisse vor. 


8. Welche technischen Werkzeuge zur automatisierten Erkennung von extre- 
mistischen Inhalten hält das Bundesinnenministerium derzeit für prinzipiell 
geeignet? 

Der Bundesregierung liegen keine vertieften Erkenntnisse hinsichtlich techni- 
scher Werkzeuge zur automatisierten Erkennung von extremistischen Inhalten 
vor. Im Übrigen wird auf die Antwort der Bundesregierung zu Frage 1 3 der Klei- 
nen Anfrage der Fraktion DIE LINKE, auf Bundestagsdrucksache 18/8845 ver- 
wiesen. 
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9. Auf welche Weise hat das BKA die zu „Testzwecken“ beschaffte Software 
PhotoDNA eingesetzt? 

a) Auf welche Bild- und Videodatenbanken wurde dabei zugegriffen? 

b) Seit wann ist PhotoDNA nach den Tests beim BKA nicht mehr im Ein- 
satz? 

Die Software „PhotoDNA“ wurde zu Testzwecken beschafft. Die Software selbst 
wurde jedoch im Bundeskriminalamt (BKA) nicht eingesetzt. Dem Quellcode 
wurden lediglich einzelne Funktionalitäten zur Ahnlichkeitensuche von Bildda- 
ten entnommen. 


10. Inwiefern wird PhotoDNA nach Kenntnis der Bundesregierung auch bei der 
Polizeiagentur Europol eingesetzt oder getestet bzw. was ist hierzu geplant? 

Der Bundesregierung liegen keine Erkenntnisse vor, dass Photo DNA auch bei der 
Polizeiagentur Europol eingesetzt oder getestet werden soll bzw. was hierzu ge- 
plant ist. 


1 1 . Auf welche Gesichtsbilder kann das BKA außer den in INPOL (das beim 
BKA betriebene elektronische Informationssystem der Polizei) eingestellten, 
biometrischen Fotos für einen computergestützten Lichtbildvergleich im 
Einzel- oder im Regelfall zugreifen? 

Das BKA besitzt derzeit keine Möglichkeit für einen computergestützten Licht- 
bildvergleich von über den INPOL-Bestand hinausgehenden digitalen Gesichts- 
bildem. 


12. Was ist der Bundesregierung darüber bekannt, welche Inhalte bzw. Formate 
mit der Software PhotoDNA erkannt werden können? 

Das Programm PhotoDNA wird im BKA nicht als eigenständige Software einge- 
setzt, sondern findet als Implementierung in forensischen Tools Anwendung. Die 
Funktionen von PhotoDNA arbeiten hierbei mit robusten Hashalgorithmen, um 
von dargestellten Bildinhalten eine Art „Fingerabdruck“ zu erstellen. Mit diesem 
lassen sich inhaltsgleiche oder ähnliche Bilder wiedererkennen. Beim eigentli- 
chen Abgleich werden die Flashwerte zweier Bilder verglichen. Bei Gleichheit 
oder Abweichungen bis zu einem definierten Umfang wird eine Übereinstim- 
mung oder Ähnlichkeit festgestellt. 


13. Wie hoch schätzt sie die Erkennungsquote der Anwendung? 

Mithilfe der Funktionalitäten von PhotoDNA wird eine Ahnlichkeitssuche durch- 
geführt. Zu Erkennungsquoten kann keine Aussage getroffen werden. 


14. Was ist der Bundesregiemng darüber bekannt, auf welche Datenbanken die 
von einigen Providern bereits eingeführte Software PhotoDNA für den Ab- 
gleich zugreift? 

Der Bundesregierung liegen keine Erkenntnisse vor. 
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15. In welchen bzw. wie vielen Fällen haben Bundesbehörden Meldungen aus- 
ländischer Strafverfolgungsbehörden erhalten, wonach PhotoDNA Inhalte 
auch in der privaten Cloud von Beschuldigten aufgespürt hat und erst dies 
schließlich zu Ermittlungen deutscher Kriminalämter führte? 

16. Von welchen konkreten Behörden stammten die Hinweise? 

Die Fragen 1 5 und 1 6 werden aufgrund des Sachzusammenhangs gemeinsam be- 
antwortet. 

Der Bundesregierung liegen keine Erkenntnisse vor. 


17. Was ist der Bundesregierung darüber bekannt, in welchen EU-Mitgliedstaa- 
ten Meldestellen für extremistisches, terroristisches oder „radikalisierendes“ 
Material im Internet eingeführt wurden oder werden, und wo sind diese an- 
gesiedelt? 

Die Bundesregierung besitzt keine Übersicht über nationale Meldestellen von 
EU-Mitgliedstaaten im Sinne der Fragestellung. Nach Kenntnis der Bundesregie- 
rung haben 25 Mitgliedstaaten nationale Kontaktstellen für die „European Union 
Internet Referral Unit“ (EU IRU) eingerichtet. 


18. Was ist der Bundesregierung über technische Aspekte der gemeinsamen 
Meldeplattform von Europol und den Internetuntemehmen bekannt? 

Die Bundesregierung hat keine Erkenntnisse über technische Aspekte einer ge- 
meinsamen Meldeplattform von Europol und Internetuntemehmen. 


19. Inwiefern soll dort zur „Identifizierung gleicher bzw. ähnlicher Intemetin- 
halte“ die Software PhotoDNA zur Anwendung kommen? 

Der Bundesregiemng liegen hierzu keine Erkenntnisse vor. 


20. Welche Haltung vertritt die Bundesregierung zur Frage, ob die gemeinsame 
Meldestelle Uploads lediglich auf Inhalte überprüft, die bereits einmal hoch- 
geladen wurden, oder ob europäische Kriminalämter (inklusive Europol) 
dort auch unveröffentlichtes Material zur etwaigen Löschung durch die In- 
temetanbieter hinterlegen können? 

Die Bundesregiemng hat zu der Frage noch keine Haltung abgestimmt. 


21. Was ist der Bundesregierung darüber bekannt, auf welche Weise das briti- 
sche Projekt „Research, Information and Communications Unit“ (RICU), 
das dem dortigen Innenministerium untersteht, an EU-Vorhaben zur Ent- 
wicklung von „Gegenpropaganda“ beteiligt ist (http;//cage.ngo/pubhcation/ 
we-are-completely-independent/)? 

Experten der britischen Research, Information and Communications Unit (RICU) 
tragen zur inhaltlichen Ausgestaltung der Netzwerktreffen des Syria Strategie 
Communications Advisory Teams (SSCAT), einem von der Europäischen Kom- 
mission finanzierten Projekt, bei. Zudem stellen sie ihre Expertise und Beratungs- 
leistung im Rahmen des SSCAT-Projektes den EU-Mitgliedstaaten zur Verfü- 
gung. 
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a) Welche Gruppen der „Zivilgesellschaft“ werden von EU-Projekten, an 
denen die RICU beteiligt ist, gefordert oder unterstützt? 

Hierzu liegen der Bundesregierung keine Erkenntnisse vor. 


b) Auf welche Weise haben dem Bundesinnenministerium nachgeordnete 
Behörden bislang mit der RICU zusammengearbeitet? 

Eine institutionalisierte Zusammenarbeit zwischen dem Bundesministerium des 
Innern nachgeordneten Behörden und RICU findet aktuell nicht statt. Vertreter 
des BKA sowie der Bundeszentrale für politische Bildung (BpB) haben jedoch 
durch Teilnahme an den Netzwerktreffen des SSCAT bzw. durch bilaterale Ge- 
spräche mit Experten von RICU in Kontakt gestanden. 


22. Welchen Inhalt hatte die EMPACT-Maßnahme „Cybercrime - cyber atta- 
cks“, die das BKA gemeinsam mit dem spanischen Centro de Inteligencia 
contra el Terrorismo y el Crimen Organizado (CITCO), der französischen 
Gendarmerie Nationale, der niederländischen Polizei und dem kroatischen 
Innenministerium durchführte (www.europol.europa.eu/sites/default/files/ 
publications/empact_0 l_oap.20 1 5_grants_awarded_0.pdf)? 

Bei der in Rede stehenden „EMPACT-Maßnahme“ handelt es sich nach Kenntnis 
der Bundesregierung um eine durch den „Internal Security Fund“ (ISF) der Eu- 
ropäischen Union geforderte Maßnahme des „operativen Aktionsplans (OAP) 
Cyber- Attacks 2015“. Informationen zu den Maßnahmen des „OAP Cyber- 
Attacks 2015“ wurden bereits im Rahmen der Kleinen Anfrage der Fraktion DIE 
LINKE, zu Kooperationen zwischen der EU und den USA im Bereich Cybersi- 
cherheit unter Frage 23 angefragt (Bundestagsdrucksache 18/4074) und beant- 
wortet (Bundestagsdrucksache 18/4286). 


23. Welche automatisierte Verfahren zur Auswertung von sozialen Medien bzw. 
deren Integration in Fall- oder Vorgangsbearbeitungssysteme kommen bei 
den dem Bundesinnenministerium nachgeordneten Behörden zum Einsatz 
(heise.de vom 28. Juni 2016)? 

Das BKA benutzt Software, deren Funktionalitäten auch zur automatisierten Aus- 
wertung in Sozialen Medien geeignet sind. Im Übrigen wird auf den als „VS - 
Nur für den Dienstgebrauch“ eingestuften Antwortteil gemäß der Vorbemerkung 
der Bundesregierung verwiesen.* 

Das Technische Hilfswerk (THW) nutzt für das Monitoring „Echobot Monito- 
ring“ der Echobot Media Technologies GmbH. Zur Verwaltung der verschiede- 
nen Social Media-Auftritte verwendet das THW ein Content-Management-Tool. 
Hierbei handelt es sich um das Programm „Social Hub“ der maloon GmbH. 


24. Welche Marktsichtungen oder Studien hat das Bundesinnenministerium 
hierzu durchgeführt oder beauftragt? 

Durch das Sachgebiet Presse- und Öffentlichkeitsarbeit des THW wurden ver- 
schiedene Produkte recherchiert und erfasst (Marktsichtung). Auf dieser Grund- 
lage wurden Angebotsabfragen bei fünf verschiedenen Anbietern durchgeführt 
und am Ende das wirtschaftlichste Produkt ausgewählt. Eine Studie wurde durch 
das THW nicht beauftragt. 


Das Bundesministerium des Innern hat die Antwort als „VS - Nur für den Dienstgebraueh“ eingestuft. Die Anlage ist im Parlaments- 
sekretariat des Deutsehen Bundestages hinterlegt und kann dort von Berechtigten eingesehen werden. 
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Im Übrigen wird auf den als „VS - Nur für den Dienstgebrauch“ eingestuften 
Antwortteil gemäß der Vorbemerkung der Bundesregierung verwiesen.* 


25. Was ist der Bundesregierung über die Funktionsweise der Software 
rsNetMAn der Firma rola Security Solutions/T-Systems bekannt? 

a) Wie viele Webseiten oder Einträge in sozialen Medien werden laut dem 
Flersteller für die Analyse in rsNetMAn ausgewertet? 

b) Welche weiteren Recherchefünktionen können über rsNetMAn ausge- 
führt werden (etwa Wildcardsuche, fragmentarische Suche, phonetische 
Suche, Ähnlichkeitssuche, Komplexrecherche, geobezogene Recherche)? 

c) Mit welchen Einschränkungen ist über die Software rsNetMAn auch die 
Suche nach visuellen Inhalten möglich? 

Der Bundesregierung sind folgende Angaben des Herstellers bekannt: Mittels der 
Software rsNetMAn ist die Analyse von 150 000 000 Webseiten sowie von 
500 000 000 Tweets pro Tag möglich. Des Weiteren soll die Software auch die 
Suche nach visuellen Inhalten ermöglichen. Überdies soll die Analyse über 
Schlüsselwörter, Metadaten, Geoinformationen (z. B. die Herkunft einer Nach- 
richt) sowie über die verwendeten Bilder (Logos, Symboliken) möglich sein. 

Weitere Erkenntnisse zur Funktionsweise der Software rsNetMAn liegen der 
Bundesregierung nicht vor. 


d) Inwiefern wird für den Einsatz von rsNetMAn schon jetzt nach extremis- 
tischen, terroristischen oder „radikalisierenden“ visuellen Inhalten ge- 
sucht? 

Es wird auf den als „VS — Nur für den Dienstgebrauch“ eingestuften Antwortteil 
gemäß der Vorbemerkung der Bundesregierung verwiesen.* 


Das Bundesministerium des Innern hat die Antwort als „VS - Nur für den Dienstgebraueh“ eingestuft. Die Anlage ist im Parlaments- 
sekretariat des Deutsehen Bundestages hinterlegt und kann dort von Berechtigten eingesehen werden. 
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